Atomic Intent Reasoning: Bringing LLM Semantics to Industrial Cross-Domain Recommendations
原子意图推理:将 LLM 语义引入工业跨域推荐
🧭 跨域推荐 · LLM 意图缓存与检索 ★ 深度解读
The Hong Kong Polytechnic University · Kuaishou Technology
离线将用户行为拆解为原子意图并缓存,在线动态组合实现 LLM 级语义推理,延迟仅 20ms
📌 工作参考价值(4 点)
- 离线 LLM 意图预计算 + 在线轻量聚合:把昂贵的大模型推理完全移到离线阶段,将用户事件转化为可检索的原子意图对(action-intent pair),在线仅做 KV 检索和树合并。在电商/内容平台的跨域推荐中,可以直接复用这种“离线语义提炼、在线实时组合”的范式,突破 LLM 在线推理的延迟瓶颈,同时保持语义信号。
- 层次用户意图树的构建与多行为权重:用意图树组织 coarse-to-fine 的偏好,节点权重融合 click/order/view 等多种行为计数并引入时间衰减。在自己的业务中,可以借鉴这种多行为强度加权与时效性折损的统一方案,有效压缩超长、异构行为序列,避免喂入原始全量序列的噪声与计算开销。
- 目标感知的意图检索与证据压缩:根据候选商品 embedding 从意图树中检索相关链,再按语义相似度和时间有效性裁剪支持证据序列,输出一个紧凑的“意图链+行为证据”作为 CTR 模型输入。在重排或精排环节,这可以提供高度目标相关的精简特征,代替手工构造的跨域行为序列特征,提升预测效果。
- 多注意力融合意图表示:将检索到的意图链 token 以 MHA 方式与目标商品 embedding 交互,不同 head 捕捉不同粒度的偏好。可以作为排序模型中一个可插拔的目标感知用户表示模块,插入到现有的 DNN 排序塔中,只需增加较小的计算量。